草庐IT

Azure 虚拟桌面

全部标签

azure - 如何通过门户管理 HDInsight 集群?

我最近开始使用WindowsAzure和HDInsight,以完成一些MapReduce工作。我想知道的是,是否可以在不需要时通过Azure管理门户暂停或停止正在运行的集群?我尝试了停止或暂停的选项,但找不到任何选项。任何帮助,将不胜感激。 最佳答案 HDInsight不支持除Running和Stopped之外的其他状态,这意味着无法将集群设置为暂停或Idle状态,这与其他云提供商不同。您可以找到添加此功能的请求here,如果你感兴趣。回答您的其他问题,通过管理门户管理HDInsight非常简单。有一个完整的界面部分专门用于集群的管

Hadoop 安装 + 启用虚拟化 64 位 CPU

我有Windows7的HPPaviliondv6笔记本,但它不支持虚拟化(如图所示,BIOS上没有任何选项)。使用此配置,我无法安装ClouderaQuickStartVMs.由于这个问题,现在我需要澄清以下几点,1)安装Hadoop时,是否需要支持虚拟化的CPU?-如果是,是否有任何选项可以在没有虚拟化支持的情况下安装在较旧的CPU上?2)安装Hadoop,CPU是否应该是64位?-如果是,是否有在32位CPU上安装的选项谢谢。 最佳答案 (1)Hadoop是(大部分)用Java编写的,不需要CPU虚拟化支持即可运行。Java适用

智能三维数据虚拟现实电子沙盘

一、概述易图讯科技(www.3dgis.top)以大数据、云计算、虚拟现实、物联网、AI等先进技术为支撑,支持高清卫星影像、DEM高程数据、矢量数据、无人机倾斜摄像、BIM模型、点云、城市白模、等高线、标高点等数据融合和切换,智能三维数据虚拟现实电子沙盘集成各类资源数据、油田原油集输系统、天然气集输系统、注入系统、给排水系统、污水处理系统、电力系统、消防系统和设备系统等要素,真实模拟地形、地貌、地物,结合地理空间专业数据,实现人性化的交互方式进行操作,具有放大、缩小、漫游、旋转、360度浏览、手势触控、图上量算、空间分析、位置采集、地区导航、地图标注、重要目标管理、应急标绘、飞行漫游、地图打印

azure - 从 Azure SQL 数据仓库查询 Hadoop ORC 表

我在从AzureSQL数据仓库读取在AzureHDInsight中创建的ORC表时遇到问题。请参阅下面的顺序来设置HDInsight实例以及AzureSQL数据仓库。我创建了一个文本文件(Sales.txt),内容如下20150614|1|10.5020150618|1|100.7520150924|1|89.7520160214|2|10456.9020150922|3|34.7020151021|3|43.7020151225|3|65.9020151231|3|87.5020160101|4|1349.4020160512|4|3982.4020150608|5|398.9020

azure - Azure Data Lake 中压缩编解码器的影响

很明显,有据可查的是,拆分zip文件的能力对Hadoop中作业的性能和并行化有很大影响。但是Azure是建立在Hadoop之上的,而且我在Microsoft文档中找不到的任何地方都没有提到这种影响。这不是ADL的问题吗?例如,GZip大文件现在是一种可接受的方法,还是我会遇到同样的问题,即由于压缩编解码器的选择而无法并行处理我的作业?谢谢 最佳答案 请注意,AzureDataLakeAnalytics不基于Hadoop。RojoSam是正确的,GZip是一种不好的并行化压缩格式。U-SQL会自动识别.gz文件并解压缩它们。但是,压缩

linux - 是否可以将 Azure datalake 作为驱动器安装在 linux 服务器上?

我们的最终目标是让我们的LinuxVM服务器将AzureDatalake作为挂载文件系统直接访问。Microsoft声明AzureDatalake与hdfs兼容,因此我们想知道是否可以通过Fuse之类的东西直接挂载或通过Hadoop系统间接挂载?Azure中的任何可用内容。拼命地从做过这件事的人那里寻找例子。 最佳答案 goofys支持挂载azuredatalake:https://github.com/kahing/goofys/blob/master/README-azure.md#azure-blob-storage

azure - 将 HDInsight 集群升级/迁移到最新版本

我确定这已发布在某处或已经传达,但我似乎找不到任何关于从一个版本升级/迁移HDInsight集群到下一个版本的信息。一点背景。自2014年1月24日以来,我们一直在使用Hive和HDInsight来存储我们所有的IIS日志。我们喜欢它,它为我们的团队提供了很好的洞察力。我最近在评论http://azure.microsoft.com/en-us/documentation/articles/hdinsight-component-versioning/并注意到我们的HDInsight版本(2.1.3.0.432823)不再受支持,并将于5月弃用。这让我开始思考如何进入3.2版。我似乎无

unix - 使用 SCP 将文件从 Windows 桌面移动到 vmware 上的 hadoop 沙箱

我认为这很简单,但非常感谢您的帮助。我的Windows桌面上有一个zip文件“RECEIPTS_LAB.zip”,我在vmware上运行一个hadoop沙箱。沙箱是我用mapr注册的培训类(class)的一部分,但我是初学者,不确定如何将zip文件从Windows移动到沙箱中的目录“/user/user01/3”手册使用如下代码scpRECEIPTS_LAB.zipuser01@node-ip:/user/user01/3node-ip是我在启动沙箱时得到的ip地址,假设它是192.168.88.128当我编写以下命令时:scpRECEIPTS_LAB.zipuser01@192.16

azure - Hadoop 与 MSSQL 报告的可能性

我一直在azureHDInsight上评估Hadoop,以便为我们的报告应用程序找到大数据解决方案。此技术评估的关键部分是我需要与MSSQLReportingServices集成,因为这是我们的应用程序已经使用的。我们的开发人员资源非常短缺,所以我越能将其纳入工程实践中越好。到目前为止我尝试了什么使用从MSSQL映射到HDInsight上的Hive的ODBC连接。在HDInsight上使用HBASE从MSSQL使用ODBC连接。在AzureHDInsight远程桌面上本地使用SPARKQL我发现HBASE和Hive在我们的报告中使用起来要慢得多。对于测试数据,我使用了一个60k行的表,

azure - 如何从 Hadoop 中的 Azure Blob 存储读取数据?

我有一个map-reduce作业,reducer获取驻留在AzureBlob存储上的文件的绝对地址,reducer应该打开它并读取其内容。我在配置Hadoop集群(HDInsight)时添加了包含文件的存储帐户。因此,reducer必须有权访问此Blob存储,但因为Blob存储不是我工作的默认HDFS存储。我的reducer中有以下代码,但它给了我一个FileNotFound错误消息。FileSystemfs=FileSystem.get(newConfiguration());Pathpt=newPath("wasb://mycontainer@accountname...");FS